WebAnything: From the Wild Web to Scalable Agent Environments
WebAnything:从野生网络到可扩展 Agent 环境
🧭 Web Agent 环境自动构建与规模化
Zhejiang University · Nanyang Technological University · Shanghai Qiji Zhifeng Co., Ltd.
全自动从真实 URL 重建可重置 Web 环境,构建 244 个网站并微调模型显著提升多项 agent 成功率
📌 工作参考价值(4 点)
- 借鉴自动化环境构建架构:用浏览器自动化收集 DOM/资源/交互结果,配合独立验证器做质量门禁,可为电商类 Agent 搭建可回归的评测环境,避免手工维护镜像站。
- 利用真实网站交互轨迹微调开源模型:从线上商品页、搜索流程捕获的轨迹数据经筛选后可作为高质量训练样本,微调 Qwen 等模型对导航、加购、表单填写等任务提升明显;重点保留任务多样性和失败重试样本。
- 验证器 + 本地修复闭环可复用到数据管道或 RAG 索引构建:独立验证器检查生成内容并触发定向修复,减少人工介入,适合维护大规模商品知识库或 Agent 记忆。
- 可重置环境支持多轮重跑与错误恢复,适合做 Agent 策略 A/B 测试;可将电商搜索链路中的商品抓取、竞品价格监控等流程抽象为可执行任务,加速迭代。